Map-reduce相关论文
Parallel Implementation of Multilayered Neural Networks Based on Map-Reduce on Cloud Computing Clust
In order to meet the requirements of big data processing,this paper presents an efficient mapping scheme for a fully con......
离散六角网格剖分是建立全球离散网格系统时一种重要的空间剖分方法。本文对全球六角网格系统的坐标系统及编码方案进行了探讨。为......
会议
近年来,对轨迹数据的挖掘和知识发现已逐渐成为研究和关注的热点问题,并广泛应用于智能交通、个性化推荐服务等领域中。越来越多的......
云安全问题日益突出,人们对合理的云安全监控、评估与预测系统的需求也日益迫切。而针对云数据的融合分析技术可以为云安全监控提......
随着因特网的不断普及,社交媒体的广泛应用,因特网上的媒体数据有了喷井式的增加,生成了海量的信息。所以在海量图像中,检索到用户......
提出一种支持检测规则动态更新的畸形会话发起协议(SIP)消息检测模型,采用正向规则和反向规则结合的方式,以有效应对未知类型的畸......
针对传统Canopy-Kmeans算法中的随机性Canopy选取的问题,提出了一种BCKmeans并行优化算法.采用“二分法”全局确定初始CanopyCente......
为保证云计算、高性能计算集群服务器系统的服务能力,需构建监控平台对各种来源数据的实现统一管理、统计分析和展现.本文面向集群......
互联网热点发现和舆论监控对政府公信力的提升有着重大的意义,而文本聚类技术在这些领域又有着非常广泛的应用。在当前互联网环境......
期刊
近几年来,Skyline查询处理在许多应用领域具有潜在的实用价值。在Map-Reduce框架下采用基于角度数据划分的方法,本文提出Cirl-Skyl......
自然灾害与地表环境实时动态监测对短周期内接收影像的快速缓存切片提出了很高的要求。利用云计算并行编程模式Map-Reduce聚集计算......
在校园信息化过程中，传统的业务平台升级方法复杂，硬件成本太高，软硬件利用率低等缺点，本文在云计算基础上构建用于处理海量数据的数字......
As a parallel programming model,Map-Reduce is used for distributed computing of massive data.Map-Reduce model encapsulat......
研究了山洪灾害监测预警系统中雨情数据的分布式存储和分布式预测;针对采集到的水文数据急剧增长和对预测精度和预报时效的要求不......
为提高智能算法在Map-Reduce作业调度问题中的求解效率,提出一种基于改进蛙跳策略的调度算法。针对蛙跳策略在Map-Reduce作业调度......
为提高智能算法在Map-Reduce作业调度问题中的求解效率,提出一种基于改进蛙跳策略的调度算法。针对蛙跳策略在Map-Reduce作业调度......
基于Map-reduce,提出了面向多核处理器应用于大规模集群的并行编程方法,应用该方法运行数据挖掘算法Canopy和K-means。针对K-means......
基于Map-reduce,提出了面向多核处理器应用于大规模集群的并行编程方法,应用该方法运行数据挖掘算法Canopy和K-means。针对K-means......
目前,基于Hadoop视频处理的传统方法都是通过MapReduce从本地文件系统读取数据,利用帧字节流进行MapReduce间数据传输,这会产生大......
在对海量数据进行分析和处理的过程中,敏感信息的隐私保护显得尤为重要。针对统计类型数据分析服务的效率和安全问题,在Map-Reduce......
在对海量数据进行分析和处理的过程中,敏感信息的隐私保护显得尤为重要。针对统计类型数据分析服务的效率和安全问题,在Map-Reduce......
为了克服大数据在采用串行加密方式时具有的加密效率低的问题,设计了一种基于双混沌系统的大数据环境的并行加密算法;首先,设计了......
如何对大规模文档集进行高效的拷贝检测是长期以来一直受到研究者们关注的问题。通常的拷贝检测算法都需要借助倒排索引。因此良好......
如何对大规模文档集进行高效的拷贝检测是长期以来一直受到研究者们关注的问题。通常的拷贝检测算法都需要借助倒排索引。因此良好......
针对传统分类算法及技术在处理海量异构数据存在的系统性能拓展性低、计算量大、耗时长、分类效果不佳等问题，采用Map-Reduce与邻近......
针对传统分类算法及技术在处理海量异构数据存在的系统性能拓展性低、计算量大、耗时长、分类效果不佳等问题，采用Map-Reduce与邻近......
针对海量数据难处理的难题，利用Hadoop平台下的Map-Reduce模型，实施了一种改进的对海量数据进行并行处理的K-means算法．为了解决传统......
针对海量数据难处理的难题，利用Hadoop平台下的Map-Reduce模型，实施了一种改进的对海量数据进行并行处理的K-means算法．为了解决传统......
采用Hadoop云计算的Map-Reduce架构，对大数据电视新闻类内容进行并行的语音识别和视频分析处理，以提高效率。主要提出了基于播音员语......
期刊
在传统媒体资源管理系统中，数据收集工作通常是基于C/S或B/S架构设计的，这对服务器的要求比较高。为了提高服务器的性能，传统的模式就......
随着网络信息量的急速增长，搜索引擎搜索信息的准确、高效显得尤为重要。PageRank算法是根据网页间链接关系对网页进行评分的算法之......
借助Map-reduce平台对旅客订票日志进行挖掘,并采用LDA算法挖掘旅客出行意图,进而计算航线的潜在价值.在2011年中航信民航旅客订票......
借助Map-reduce平台对旅客订票日志进行挖掘,并采用LDA算法挖掘旅客出行意图,进而计算航线的潜在价值.在2011年中航信民航旅客订票......
业界移动通讯配置部署、运维管理系统对工程师的技术要求高,工作低效,容易出错,需要支持较大的数据量。为了解决这些痛点,我司进行......
随着广播监测工作的积累和发展,广播监测数据与日俱增,传统的数据处理分析技术难以实现对海量广播监测数据进行高效的分析。基于此......
期刊
在对大数据中的特征与数据挖掘进行了简要介绍的基础上,采用Map-Reducede方法,将大数据应用在动物医院中,提出了宠物的电子芯片与......
在对大数据中的特征与数据挖掘进行了简要介绍的基础上,采用Map-Reducede方法,将大数据应用在动物医院中,提出了宠物的电子芯片与......
搜集2009-2014年Web of Science核心合集的引文数据库中大数据领域的文献,进行计量及可视化分析。利用CiteSpaceⅡ对该领域文献做......
搜集2009-2014年Web of Science核心合集的引文数据库中大数据领域的文献,进行计量及可视化分析。利用CiteSpaceⅡ对该领域文献做......
Due to its importance, influence spread maximization problem for social network has been solved by a number of algorithm......
针对FP-Growth算法在处理海量数据时需要耗费大量系统资源无法实现快速的挖掘出关联规则,提出基于Map-Reduce框架的FP-Growth算法.......
针对FP-Growth算法在处理海量数据时需要耗费大量系统资源无法实现快速的挖掘出关联规则,提出基于Map-Reduce框架的FP-Growth算法.......
数据清洗是大数据中一个重要的主题。本文基于Hadoop设计并实现了一个大数据的云清洗系统。通过Map-Reduce计算模型,该系统能够检......
期刊
通过传感器采集到的作物数据进行统一管理建立作物灾情数据集群池,Map-Reduce模型映射归类预处理后,再利用BP网络动态训练,最后利......
将XML文档区间编码思想和云计算相结合,提出Hadoop环境下基于Map-Reduce的并行的编码方案。该方案提出PXMR算法,解决了非同一分片......
本文对大数据Map-Reduce运行框架能耗优化算法进行研究与讨论。首先对Map-Reduce框架的特点、运行流程、工作原理进行介绍和分析,......
为了降低大数据处理集群在执行任务过程中的慢任务对作业执行效率的影响,提出了一种识别慢任务、备份慢任务、减少慢任务相结合的......
介绍了为兰州重离子加速器冷却储存环外靶实验设计实现的一套数据获取原型系统。系统借鉴流处理、Map—reduce和Bigtable等技术或......
作为一个平行编程模型，地图还原剂被用于巨大的数据的分布式计算。地图还原剂模型包含平衡的平行实现，差错容忍的处理、本地计算和负......
随着位置感应设备和应用程序的日益普及,GPS轨迹数据的规模和可用性也在迅速扩展。大规模GPS轨迹数据为了解车辆和道路网络使用模......
